Capek 0.5: An Execution-Centric Vision-Language Model for Embodied Intelligence
Capek 0.5:以执行为中心的具身视觉语言模型
🧭 执行中心的能力整合与多专才合并训练
XPENG ROBOTICS
提出按执行阶段划分能力分类,通过专才强化学习与权重合并-蒸馏实现统一多模态模型
📌 工作参考价值(3 点)
- 多能力统一模型训练范式:以电商/推荐系统中的多任务(CTR/CVR/搜索相关性)为类比,可先将不同目标视为独立能力,各自训练专才(LoRA或独立头),再通过权重合并(如TIES-Merging)和路由蒸馏,得到一个推理开销低且保留各能力的统一模型,避免多模型部署。
- 可验证奖励驱动的强化学习:在推荐Agent的动作决策(如消息推送时机、优惠券发放)中,可利用规则/仿真环境构造可验证奖励(收益提升、转化率),直接用RL优化LLM策略,减少对人工偏好标注的依赖。
- 能力分类指导系统设计:借鉴“空间推理、时间理解、动作指导、状态验证”的分类,在搜索推荐Agent中显式拆分出“用户意图理解、长短期兴趣建模、item选择、结果验证”等子能力,使数据构造和训练目标更聚焦。